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Verfahren und Vorrichtung zum automatischen Fokussieren eines 

optischen Gerates 



Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum automatischen 
Fokussieren eines optischen Gerates, z.B. eines (Stereo-) 
Operationsmikroskopes, mit dem resp. mit der ein Fokussieren auf jene 
Objektebene moglich ist, in welcher der Anwender die grosste Sehscharfe 
benotigt. 

Bei vielen Applikationen, insbesondere klinischen, wird nur in einem kleinen 
Bereich des Sichtfeldes gearbeitet. Die Fokussierung soil also auf diesen 
Bereich vorgenommen werden. 

Der Erfindung gehen dabei die Erkenntnisse voraus, dass 

gerade dort, wo beispielsweise mit einem Instrument gearbeitet wird, der 
Betrachter die grofcte Scharfe wunscht 

und 

sich der Bildinhalt in diesem kleinen Umfeld, in welchem gearbeitet wird, 
infolge Bewegung des Instruments am starksten verandert. 

Neben der manuellen Einstellung der Fokusebene einer optischen Einrichtung 
gibt es zahlreiche automatische Systeme, die auf Grund eines Mess-Signals, 
erzeugt im Wesentlichen auf Grund einer Messung der Distanz zum Objekt, 
die Einstellung vornehmen. 

Liegen die Koordinatenachsen X und Y in der Objektebene und verlauft die 
Z-Koordinatenachse parallel zur optischen Achse, mussen zur Ermittlung 
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einer Distanz z1 vom optischen System zu einem Punkt in der Objektebene 
die X- Y-Koordinaten definiert werden: 

In einfachen Systemen werden diese Koordinaten mit xO=yO=0 festgelegt. 

In aufwendigeren Systemen werden die zu definierenden Koordinaten 
5 (xO.yO) mittels eines Joysticks festgelegt. 

Komplexe Systeme konnen beispielsweise uber "Eye tracking' die 
Koordinaten (xO.yO) eines vom Beobachterauge betrachteten Punktes 
ermitteln und mittels des Messsystems den Abstand dieses Punktes zum 
Objektiv ermitteln. 

1 0 - Anpassung der zO-Koordinate auf Grund der Veranderung der Helligkeit 
der Bildstrahlen bei Anderung der Scharfeinstellung (DE-A-1 928 432, 
Commissariat a I'Energie Atomique, Paris). 

Des Weiteren wurden im Stand der Technik berucksichtigt: 
. _ DE-A-2 053 017 (Kompensation eines Spaltbildes durch einen 
15 verstellbaren Spiegel) und DE-B-2 102 922 (unsichtbares Strahlenbundel 

mit fotoelektrischer Einrichtung). 

Der Erfinder erkannte, dass die bekannten Systeme nachteilig sind in Bezug 
auf die folgenden Punkte: 

i) Eine manuelle Oder elektrische Fokussierung ist langsam und lenkt den 
20 Betrachter von seiner eigentlichen Aufgabe resp. Tatigkeit ab. 

ii) Ein Autofokus-System fokussiert auf einen bestimmten, vorgewahlten 
Bereich (x0,y0), welcher - manuell Oder elektrisch angesteuert - gezielt 
verandert werden muss. 

iii) 'Eye Tracking': Entsprechende Einrichtungen sind technisch aufwendig 
25 und benotigen Zusatzeinrichtungen zum Vermessen des Anwender- 

Auges. Assistenten, die uber einen Ausspiegelungs-Strahlengang 
beobachten, unterliegen in ihrer Betrachtung der Blickrichtung des Haupt- 
Beobachters. 
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iv) Alle bekannten Verfahren ignorieren den Einsatz von Instrumenten durch 
den Anwender beziehungsweise werden dadurch unter Umstanden 
gestort. 

Der Erfindung liegt somit die Aufgabe zugrunde, eine Verbesserung zu finden, 
5 welche die angegebenen Nachteile vermeidet, anwenderfreundlich ist und die 
Anwendung eines Instrumentes storungsfrei berucksichtigt. 

Gelost wird diese Aufgabe durch das folgende Verfahren: 

Bildet man z.B. den Operationssitus auf einem Bildsensor ab, so wird - gemali 
einer ersten Ausfuhrungsform - erfindungsgemaB uber die Auswertung der 

10 Anderung des Bildinhaltes mittels eines Rechners ein 

2-dimensionales Histogramrn erstellt, aus dem eine bestimmte 
Bewegungsaktivitat, beispielsweise das Bewegungs-Maximum, in Form von 
x0-, yO -Koordinaten ermittelt wird. Diese Koordinaten fuhren uber das 
. _ eingesetzte Messverfahren zum Abstand z1 zwischen optischem System und 

15 dem ermittelten definierten Objektfeld bzwfObjektpunkt. * 

Durch die Erfindung und deren Weiterentwicklungen ergeben sich folgende 
Vorteile: 

i) Bestimmung der x0-, yO-Koordinaten mit bestimmter (starkster) Anderung 
des Objektes bzw. bestimmter (starkster) detektierbarer Bewegung im 

20 Objektfeld: 

Ermoglicht eine Fokussierung auf vorgegebene (maximale) 
Veranderungswerte des Objektes - beispielsweise Bewegung 
chirurgischer Instrumente oder auch Vorgange am Objekt selbst- und 
damit Fokussierung auf den Ort des Geschehens, unabhangig von 
25 der Blickrichtung der Augen des (Haupt-)Anwenders. Assistenten 

sehen somit immer am entscheidenden Ort scharf. 

ii) Selbsttatige Ermittlung und Einstellung der Distanz Objektebene / 
optisches System: 
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Weder manuelle Justierung in X-, Y-Richtung noch in Z-Richtung sind 
notwendig. 

Es wird automatisch auf den gewunschten oder wichtigsten 
Betrachtungspunkt fokussiert und zwar unabhangig von 'storenden' 
5 Umgebungsbedingungen, wie Augenpupillenentfernung vom Okular, 

tatsachliche Blickrichtung, etc. 

iii) Weiterentwicklungsfahigkeit durch Programmierung bzw. 
Programmanderung 

Nicht nur starkste Anderungen konnen erfasst werden, sondern auch 
10 vorgegebene Anderungs-Bereiche. 

iv) Augen werden nicht vermessen: 

Zusatzliche Reize auf die Netzhaut (z.B. Infrarot-Beleuchtung) 
werden vermieden. 

System kann auch bei remote-wirkenden optischen Geraten 
15 eingesetzt werden, bei denen bestimmte andere Moglichkeiten zur 

Autofokussierung entfallen (blickrichtungs-orientierte Systeme). 

v) Entfall von aufwendiger Vermessungsoptik: 

Losung des Detektionsproblems hauptsachlich durch Software unter 
Ausnutzung der bereits vorhandenen Rechner und Vorrichtungen 
(Kamera); dadurch kleinere Bauform. 

System kann vielseitig eingesetzt werden 

Unterteilung nach Objektfeldern bestimmter einstellbarer Grofce: 

Segmentierung des Objektfeldes mit der Moglichkeit der Gewichtung 
der gemessenen Bewegungsaktivitat und dadurch auch der 
Systemempfindlichkeit. 

vii) Spezielle Suche nach besonderen Reflexen: 
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Erlaubt die Auftrennung der detektierten Bewegungsaktivitaten nach 
Aktivitaten des Situs, Aktivitaten des chirurgischen Instrumentes oder 
der chirurgischen Instrumente (z.B. Skalpell) oder sonstigen 
Aktivitaten. Dadurch wird es mbglich, z.B. durch ein Zeigeinstrument 
5 gezielt die Fokussierung zu steuern. 

viii) Bildanderungsdetektion nach Pixeln aufgelost: 

Erlaubt einfache Detektion mit relativ geringem Rechneraufwand, 
erlaubt punktgenaue Detektion und daher punktorientierte 
z-Berechnung. 

10 ix) Handische Grobfokussierung vordem Bewegungs-Auswerte-Lauf: 

Erlaubt ein rasches und genaues Auswerten, da alle entscheidenden 
Teile des Objektes relativ scharf gesehen werden und daher relativ 
gut auf dem Bildsensor der Kamera abgebildet werden. 

Im obigen Text wird zwar auf eirien Chirurgen und auf ein - - 
15 Operationsmikroskop bzw. auf ein Operationsfeld Bezug genommen; die 

Erfindung ist jedoch nicht darauf eingeschrankt, sondern steht vielmehr auch 
anderen Benutzerri optischer Gerate often (z.B. Video- und Fotokameras, 
monokulare wie auch binokulare Anwendungen). 

Die Bezugszeichenliste und die Figuren 1 bis 6 sind zusammen mit den in den 
Anspruchen beschriebenen Merkmalen integrierender Bestandteil der 
Offenbarung dieser Anmeldung. 
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Figurenbeschreibung 



Die Figuren werden ubergreifend beschrieben. Gleiche Bezugszeichen 
bedeuten gleiche Bauteile. 




Figur 1 zeigt einen beispielhaften Aufbau einer erfindungsgemalJen 



5 Bildsensor-Analyseeinheit 8 und einen Bildsensor 1, beispielsweise ein CCD 
einer Kamera mit einer Abbildungsoptik 2. Die Optik 2 kooperiert mit einem 
Strahlenteiler 3, der im Strahlengang nach einem Hauptobjektiv 5 eines 
optischen Gerates angeordnet ist und das Bild des Objektes 10 einerseits z. 
B. zum Anwender (Okular) und andererseits auf den Bildsensor 1 lenkt. Der 

10 Bildsensor stellt das Bild des Objektes 10 der Bildsensor-Analyseeinheit 8 
(Rechner) in elektronisch aufgeloster Form 1a zur Weiterbearbeitung zur 
Verfugung. Dieses Signal wird in der Bildsensor-Analyseeinheit 8 in ein Signal 
8a fur eine Autofokus-Systemeinheit 9 umgewandelt. Die Autofokus- 
Systemeinheit 9 steuert, basierend auf den Entfernungs-Signalen 6a und 6b 

15 eine Fokussiereinrichtung 7 an und regelt die Position des Objektives 5. 

Figur 2 zeigt das Bild eines Objektes, wie es sich beispielsweise beim Blick 
durch das Okular eines Mikroskops darstellt. So wird es auch am Bildsensor 1 
abgebildet. Ein chirurgisches Instrument 14 vollfuhrt am Objekt 10 Tatigkeiten, 
die zu einer Lageveranderung der Instrumentenspitze fuhren. Dieser 
20 Bewegungsablauf wird symbolisch durch die Kurve dargestellt. 

Figur 3 zeigt die Auswertung der Haufigkeit von Bewegungen der 
Instrumenten-Spitze in Form eines Histogrammes. Die Histogramm- 
Koordinaten X, Y entsprechen den Objekt-Koordinaten X, Y; die Z-Achse des 
Histogrammes entspricht der Haufigkeit der Bewegungen im jeweiligen 
25 Bildfeld. 
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Figur 4 zeigt das Histograrnm in 2-dimensionaler Form. 

Figur 5 zeigt die Haufigkeit von Anderungen uber das Objekt X, Y. Haufige 
Anderungen sind als dunkle Histogramm-Pixel dargestellt. 

Figur 6 zeigt einen Aufbau, bei dem Instrumente 14a bzw. 14b als 
5 Zeigeinstrumente verwendet werden und die sich durch sie nacheinander 
detektierten Bewegungsaktivitaten 15a bzw. 15b. Damit kann auf die 
entsprechenden Stellen fokussiert werden. 

Figur 7 erlautert die Geometrie der Objektkoordinaten. Ein Objektpunkt 10a 
besitzt eine Koordinate (x0,y0,z0) im Objektraum. xO und yO wurden auf 
Grund der Videoanalyse ermittelt. Mittels Entfernungsmessung -z.B. durch 
einfache Triangulation - kann die effektive Distanz z1 zur Referenzebene 5a 
des Hauptobjektives 5 ermittelt werden. 




\0J 
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Funktionsweise 



Ein Teil des von einem zu betrachtenden Objekt 10 ausgehenden 
Strahlenbundels 20 wird mittels eines Strahlenteilers 3 uber eine Optik 2 auf 
einen Bildsensor 1 , beispielsweise das CCD einer Kamera, abgebildet. Der 
Bildsensor stellt somit das Bild des Objektes 10 in elektronisch aufgeloster 
Form einer Bildsensor-Analyseeinheit (Rechner) 8 zur Verfugung. Dieser 
Rechner 8 stellt mittels geeigneter Programme intern die Haufigkeit von 
Bewegungen (Bildanderungen) an bestimmten Bildstellen in Form eines 
Histogrammes (Figur 3) dar. 

Die X-, Y-Ebene des 214 -D-Histogrammes entspricht den Objekt-Koordinaten~ 
X, Y. Die Z-Achse des Histogrammes stellt die Haufigkeit von Bewegungen in 
einem bestimmten Punkt der X-, Y-Ebene dar. ErfindungsgemalJ wird ein 
bestimmter Z-Bereich des Histogrammes, beispielsweise das Maximum, 
rechnerisch ermittelt und die dazugehorigen Koordinaten (x0,y0) berechnet. 

Diese ermittelten Koordinaten werden an eine Autofokus-Systemeinheit 9 
weitergegeben. Die Autofokus-Systemeinheit 9 stellt - beispielsweise uber 
einen Messstrahl 6c - die Distanz zu diesem Objektpunkt 10a (x0,y0,z0) fest. 
Mittels einfacher Triangulation kann die effektive Distanz z1 zwischen dem 
Objektpunkt (x0,y0,z0) und dem Hauptobjektiv 5 ermittelt werden. Auf Grund 
dieser Ermittlung wird mittels der Fokussier-Einheit 7 das Hauptobjektiv 5 in 
diejenige Lage gebracht, dass der Objektpunkt (xO.yO) fur den Betrachter 
scharf abgebildet wird. 

Die Erfindung ist dabei aber nicht eingeschrankt auf ein Verfahren mit einem 
Messstrahl 6c. Die definitive Bestimmung der Fokusdistanz z1 zum 
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entsprechenden Messpunkt (xO,yO,zO) kann auch durch andere herkommliche 
Verfahren ermittelt werden, wie z.B. Schnittbild, Randscharfenanalyse, etc. 
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Bezugsziffernliste 

1 Bildsensor (CCD) 

1a elektrisches Signal (Videosignal) 

2 Optik fur Bildsensor 
5 3 Strahlenteiler 

4 Strahlenteilerschicht 

5 Objektiv 

|§^^ 5a Referenzebene Objektiv 

6 Entfernungsmesser6a Signal zu messende Position X, Y 
10 6b Signal Entfernung Z am Ort X, Y 

6c Messstrahl 

7 Fokussiereinrichtung 

7a . Signal einzustellende Distanz Z 

8 Bildsensor-Analyseeinheit (Rechner) 
15 8a Signal zur Autofokus-Systemeinheit 

9 Autofokus-Systemeinheit 

10 Objekt 

10a Objektpunkt / -detail 

1 1 optische Achse von (5) 
20 12 optische Achse von (1) 

13 Bildfeld 

14 bewegliches Objekt / Instrument 

14a erste Position des Instruments (x1,y1) 

14b zweite Position des Instruments (x2, y2) 

25 15 Histogramm 

15a Histogramm des Instruments: erste Position 

15b Histogramm des Instruments: zweite Position 

20 Strahlengang von (5) 

21 Strahlengang von (1) 

30 22 Strahlengang zum Betrachter 
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30 Winkel zwischen optischer Achse / Objekttrajektorie 

31 Abstand zwischen Objektiv / Objekt (z1 ) 
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Patentanspruche 

1 . Verfahren zum Fokussieren des Objektives einer optischen Einrichtung 
auf ein Objekt unter Ausnutzung der uber einen Bildsensor gewonnenen 
Bildinformation vom Objekt, dadurch gekennzeichnet, dass 

5 - das Objekt (10) nach Objektfeldern (xi.yi) mit wahrnehmbaren 

Bildanderungen untersucht Oder unterteilt wird, 

- worauf ermittelt wird, welches der Objektfelder (xO.yO) eine bestimmte 
Anderungsaktivitat, beispielsweise die hochste, aufweist, 

- worauf der z1-Abstand zwischen dem Objektiv (5) und dem 
10 Objektfeld (xO.yO) mit der vorgehend bestimmten Anderungsaktivitat 

berechenbar wird, 

- worauf dieser Wert zur rechnergestutzten Ansteuerung einer 
Fokussiereinrichtung (7) des Objektives (5) benutzbar wird. 

Verfahren nach Anspruch 1 mit Bildanalyse zur Auswertung von optisch 
erkennbaren objektmaliigen Anderungen, dadurch gekennzeichnet, 
dass diese im Bild erfassbar und nach schnellen und langsamen 
Veranderungen gewichtet werden. 

Verfahren nach Anspruch 1 mit Bildanalyse zur Auswertung von optisch 
erkennbaren objektmafJigen Anderungen, dadurch gekennzeichnet, 
dass diese im Bild erfasst und nach Helligkeit, Auftreten von Reflexen, 
etc. gewichtet werden. 

4. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass die Bildkoordinaten mit vorgegebenen 
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Veranderungswerten, beispielsweise der haufigsten Anderung pro 
Zeiteinheit, bestimmt werden. 

5. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass diese Anderungen rechnerisch gewichtet 

5 werden. 

6. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass auf Grund vorprogrammierter Gewichtungswerte 
die Fokussierung auf die Stelle mit den entsprechenden objektmaliigen 
Anderungen vorgenommen wird. 

10 7. Verfahren nach einem der vorhergehenden Anspruche, dadurch 

gekennzeichnet, dass bewegliche Objekte (14), beispielsweise die 
Spitze chirurgischer Instrumente (14; 14a; 14b) identifiziert werden und 
deren Bewegung beobachtet wird. 

8. Verfahren nach einem der vorhergehenden Anspruche, dadurch - 
15 gekennzeichnet, dass zur Erkennung von optisch erkennbaren 

objektmafiigen Anderungen das Bild ubereinen Bildsensor (1) in Pixel 
(xi,yi) aufgelost und pro Pixel der Bildsensor (1) ein elektrisches Signal 
(1a), beispielsweise ein Videosignal, erzeugt, das fur die weitere 
Berechnung herangezogen wird. 

20 9. Verfahren nach einem der vorhergehenden Anspruche, dadurch 

gekennzeichnet, dass die Anderungen aller elektrischen Signale des 
Bildsensors (1) erfasst und rechnerisch in einem virtuellen TA - 
D-Histogramm (15) dargestellt werden, wobei die X-, Y-Ebene des 
Histogrammes (15) der Ebene des Bildsensors (1) und die Z-Achse des 

25 Histogrammes (15) den Anderungen der Signale entspricht. 

10. Verfahren nach einem der vorhergehenden Anspruche, dadurch 

gekennzeichnet, dass ein bestimmter Z-Bereich des Histogrammes 
(15) , beispielsweise das Maximum, festgelegt und der dazugehorige 
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Punkt in der X-, Y-Ebene des Histogrammes (15) sowie die 
entsprechende Position (xO.yO) des Objektes (10) bestimmt wird. 

11. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass auf die nach Anspruch 10 bestimmte Position 
(xO, yO) fokussiert wird. 

12. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass das Erfassen der Anderungen bzw. Bewegungen 
rechnergestutzt nach - gegebenenfalls uber Software - voreinstellbaren 
Parametern erfolgt. 

r 

10 13. Verfahren nach einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass vor dem rechnergestutzten Erfassen der 
Anderungen bzw. Bewegungen eine manuelle Fokussierung nach 
herkommlichen Gesichtspunkten durchgefuhrt wird. 

14. Vorrichtung zum Fokussieren eines optischen Systems mit einem 

15 ferngesteuerten Stellglied (7) fur ein verstellbares Objektiv (5), mit einem 

Bildsensor (1) und einer Bildsensor-Analyseeinheit (8), dadurch 
gekennzeichnet, dass die Bildsensor-Analyseeinheit (8) ein Rechner 
(8) mit einem Programm umfasst, der, beziehungsweise das wenigstens 
einen der in den vorhergehenden Anspruchen angegebenen 
JL< 20 Verfahrensschritt durchzufuhren imstande ist. 

15. Vorrichtung nach Anspruch 14, dadurch gekennzeichnet, dass der 
Rechner (8) eine Analysevorrichtung zur Bestimmung von Anderungen 
elektrischer Signale (1a) von Pixeln eines Bildsensors (1) umfasst. 
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Zusammenfassung 



Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Fokussieren 
eines optischen Gerates auf ein Objekt (10), wobei am Objekt ein Gebiet 
hoherer Bildinhaltsanderfrequenz gesucht wird, worauf auf dieses Gebiet 



C K 5 automatisch fokussiert wird 



(Fig. 2) 
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